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Beschreibung teilhaft derart, dafi nach ubereinstinimenden oder ahnUch^ 

; Bildbereichen (bzw. Signalbereichen) gesucht wird, wobei 

Die Erfindurig betrifft ein Verfahren zur Erzeugung von der Korrelationsalgorithmus entsprechend den im Rahmen 
Bilddarstellungen der Oberflache der Innenwand von Hohl- der Endoskopie menschlicher Organe gegebenen Erforder-. 
korpem im Rahmen einer endoskopischen Untersuchung, *5 nissen und Bedingungen ausgestaltet ist. Wird aufgrund des 
insbe^ndere von Hohlramnprganen und GefaBeii, wobei KorreUeren ein Shnlicher oder nahezu identischer, iiberlai^ 

diemittelsdesEndoskopsgeliefert«iBilddat6ninFormvori pende Bildbereich festgestellt, so konnen die beide vergii- 

\^deobildsignalen ausgegeben werden. chenen Bilder/Signale iiberlagert bzw. zusammengesetzt 

Die Endoskopie mit Fiber-Endoskopen ist heutzutage werden. Auf diese Weise erfolgt ein stetiger Aufbau des Ge- 

eine medizinische Standardanwendung und ermoglicht das lO samtbildes, welches durch jedes hinzukbmmende Einzelbild 

Betrachten der Innenwande von Hohkaumorganen wie bei- vergroBert bzw. ausgebaut wird. Altemativ oder zusatzlich 

spielsweisedem Magen, Darm, der Blase Oder dergleichen, konnen erfindungsgemaB auch raumliche Positions* nrid/ 

wie auch von GefaBen. Das Endoskopobjektiv wird wah- oder Orientierungsdateq zu den Einzelbildem, zweckinaBi- 

rend der Untersuchung des Qigans/GefaBes in dieses einge- gerweise zu jedem Einzelbild aufgenommen werden, wobei 

schoben, dort verschoben, gedreht und/oder abgewinkelt, 15 diese Daten den jeweiligen Bildem zugeordnet und imRah- 

uih die Innenwand aus unterschiedlichen Richtungen und men der Bildverknupfung beriicksichtigt werden. Anhand 

Positionen betrachten zu konnen. Das Auge des Arztes kann dieser Daten ist die lokale Position des Innenwandbereichs^ 

wahrend der Untersuchung jeweils nur eingeschrankt Teil- welcher in einem Einzelbild dargestellt ist, bestimmbar, so 

bereiche der Innenwand des untersuchten Hohlkprpers be- daB mit einer entsprechend ausgebildeten Bildverarbei- 

trachten. Diese Einschrankung ist durch die Grenzen des 20 tungseinrichtung allein anhand dieser Daten die Bildverr 

Endoskop-Objektivs gegeben. Denn das Objektiv laBt nur knupfung erfolgen kann. ZweckmaBigerweise sollten aber 

einen sehr begrenzten Blickv^dnkel zu. Um auch nach der beide Verknupfungsmechanismen in Verbindung miteinan- 

^Untersuchung die MSglichkeit zu geben, die untersuchten der zum Einsatz kommen. 

Bereiche nocbmals betrachten und beurt^ilen zu kdhnen, ist Ein weiteres Problem im Stand der Technik bei Verwen- 

es haufig iiblich; eine Videoaufzeichnung der wahrend der 25 dung normaler zweidimensionaler Endoskope liegt femer 

Endoskopieprozedur aufgenommenen Bilder vorzunehmen. darin, daB der Arzt die Oberflache der Innenwand des Hohl- 

Zu diesem Zweck werden die vom Endoskop "gelieferten korpers nicht dreidimensional betrachten kann, er also auch 

Bilddaten" entsprechend in Form von Videobildsignalen, nicht etwaige Wandstrukturen oder dgL, die sich bevorzugt 

beispielsweise mittels von einer nachgeschalteten Kamera, in einer dreidimensionalen Darstellung ergeben, betrachten 

erzeugt und in dieser Form als analoge Signale dem Video- 30 und in seiner Diagnose benicksichtigen kann. Um hier Ab- 

recorder zugefuhrt. hilfe zu schaffen kann erfindungsgemaB femer yorgesehen 

Der Erfindung liegt damit das Pix)blemzugrunde, ein Ver- sein, daB basierend auf den erfaBten Positions- und/oder 

fahrrai zur Erzeugung von Bilddarstellungen anzugeben, Qiientiehmgsdaten durch Uberlagem und/oder Zusammen- 

welches es dem Arzt erm6glicht,iiicht nur die von den opti- setzen ein dreidimensionales Bild erzeugt wird, welches 

schen Eigenschaften des Endoskops vorgegebenen kleinen 35 dann an der entspirechenden Anzeigeeinrichtung ausgege- 

Teilbereiche betrachten zu konnen, sondem einen entspre- ben wird. Aufgrund dieser erfindungsgemaBen Verfahrens- 

chenden groBeren Bereich, um auf diese Weise auf einen ausgestaltung erhalt der Arzt also ein basierend auf den auf- 

Blick mehr Informationen zu eriialten und eine bessere Dia- genommenen Einzelbildem erzeugtes dreidimensionales. 

gnose stellen zu konnen. Bild des gesamten, von ihm mit dem Endoskop betrachteten 

Zur Losimg dieseis Problems ist bei einem Verfahren der 40 Hohlkorperbereich. Dem Arzt sind so samtliche sich aus 

eingangs genannten Art erfindungsgemaB vorgesehen, daB dieser speziellen dreidimensionalen Darstellung ergebende 

mehrere Einzelbilder unteirschiedlicher Bereiche der Innen- Informationen erkennbar, die er in seine Diagnose einflieBen 

wand des zu untersuchenden Hohlkdrpers aufgenommen f assen kann. Ein weiterer Vorteil insbesondere dieser dreidi- 

weiden, deren Videobildsignale digitalisiert werden, und mensionalen Darstellung ist die Moglichkeit, Strukturen wie 

daB basierend auf den digitalisierten Videobildsignal in ei- 45 z. B. Geschwure oder Tumore, die im Gesamtbild erkennbar 

ner Bildverarbeitungseinrichtung durch tJberlagerung und/ sind, vermessen zu konnen. Auch eine gezielte Fuhrung des 

Oder Zusammensetzen einzelner Einzelbilder ein Gesamt- Endoskops zur Betrachtung bestinmiter; . sich im Rahmen 

bild erzeugt wird. der Endoskopie als relevant darstellender Lmenwandberei- 

Das erfindungsgemaBe Verfahren schafft mit besonderem che kann auf diese Weise unterstutzt werden. . 

Vorteil ein Gesamtbild durch tjfb^lagem^sammensetzen 50 Bei der Untersuchung von Organen oder GefaBen kann 

liiehrerer Einzelbilder, welche vorher digitalisiert wurden. mithin das Problem auftauchen, daB das Organ/GefaB sich 

Zu diesen Zweck kommt mit besonderem Msrteil eine Bild- selbst bewegt oder aufgrund auBerer Einfliisse, beispiels- 

verarbeitungseinrichtung zum Einsatz, welche zu einer ent- weise durch eine Bewegung eines anderen Organs, bewegt 

sprechenden tTberlagerung und/oder Zusammensetzung wird. Dies fiihrt zu Artefakten innerhalb der Einzelbilder 

ausgebildet ist Dieses Gesamtbild, welches an einer ent- 55 wahrend dieser Bewegung. Um im Rahmen der Bilderzeu- 

sprechenden Anzeigeeinrichtung beispielsweise in Form ei- gung insbesondere zur Schaf[ung eiries dreidiniensioiialen 

nes Monitors Oder eines Femsehers wiedergegeben werden Bildes etwaige hieraus resultierende Schwierigkeiten zu 

kann, zeigt vorteilhaft den gesainten, sich aus den Einzelbil- yermeiden kann erfindungsgemaB femer voigesehen sein, 

dem ergeberiden Innenwandbereich, so . daB dem Arzt nicht . daB zu jedem Einzelbild spezifische Positions- und/oder 

nur die jeweils lokale Information zur Verfugung gestellt 60 Orientierungsdaten aufgenbnmien und diesem zugeordnet 

wird, soridem die Gesamtinformation, die er durch das Be- werden. Mit Hilfe dieser Daten kann dann quasi eine Nor- 

trachten verschiedener einzelner Teilbereiche erhalten hat. mierung der Einzelbilder erfolgen und ein korrektes Uberla- 

Das Uberlagem und/oder Zusammensetzen der Einzelbil- gem/Zusanunensetzen und damit eine Rekonstruktion des 

der bzw. deren Weobildsignale erfolgt erfindungsgemaB Hohlkorpers zu der tatsSchUchen Form erfolgen. Erfolgt die 

durch Korrelation mittels Korrelationsalgorithmen und/oder 65 Uberlagerung/Zusammensetzung der Einzelbilder (auch) 

aufgrund wahrend der Einzelbildaufhahme erfaBter raumli- unter Verwendung des Korrelationsverfahrens, so hat es sich 

Cher Positions- und/oder Orientierungsdaten. Ini Falle der * . als vorteilhaft erwiesen, wenn im Rahmen der Korrelation 

Korrelation arbeitet die Bildverarbeitungseinrichtung vor- optische und/oder durch eine Bewegung des Hohlkorp^s 


DE 198 00 765 A 1 


hervorgerufene Bildartefakte wie Verzerrungeh oder dgl. 
beriicksichtigt werden, d. h., die Korrelationsalgorithmen 
sind derart ausgestaltet, daB etwaige Bildartefakte, wie sie 
zwischen zwei Hnzelbildem auftreteh konnen, im Rahmen 
der Korrelation beriicksichtigt werden. Dies ist vor allem 
daiin moglich, wenn die Bildaufriahmerate im Bereich meh- 
rerer Einzelbilder pro Sekunde liegt, da dann die insbeson-. 
dere bewegungsbedingten Bildartefakte von Hnzelbild zu 
Einzelbild nichtubermafiig sind. 

Wie bereits beschrieben konnen optische oder bewe- 
gungsbedingte Bildfehler auftreten. Um diese zu eliminie- 
ren und eine Gesamtbilddarstellung zu erzeugen, die den tat- 
sachUchen ZustandA^erlauf der Innenwand wiedefgibt, kann 
erfindungsgemaB vor dem Uberlagem und/oder Zusammeri- 
setzen der Einzelbilder bzw. der Bildsignale eine Bilddaten- 
korrektur vorgenommen werden, welche beispielsweise die 
aufgnmd in der Endoskopoptik hervoigerufenen Bildfehler 
eliminiert. Dabei konnen die bewegungsbedingten Bildarte- 
fakte bevorzugt anhand der Positions- und/oder Orientie- 
^rungsarten korrigiert werden, da anhand dieser eine kon- 
krete Lagebeziehung des jeweiligen Einzelbildes bezuglich 
eines festen Koordinatensystems gegeben ist und auf diese 
Weise die "Position" des jeweiligen Einzelbildes im Ge- 
samtbild bekannt ist, so dafi entsprechend korrigiert werden 
kann. 

Fur den Arzt ist es insbesondere zweckmaBig, wenn erfin- 
dungsgemaB die Bilderzeugung online wahrend der Einzel- 
bildaufhahme moglich ist, da er dann sofort einen Uberblick 
iiber den gesamten bereits untersuchten Innenwandbereich 
erhalt, Dabei kann die Online-Bilderzeiigung sowohl betref- 
fend das zweidimensionale Gesamtbild als auch das dreidi- 
mensiohale Gesamtbild moglich sein. Auch eirie Oflfline- 
Bilderzeugung nach Aufnahme der Einzelbilder ist erfinr 
dungsgem^ moglich. Insbesondere zur diagnosidschen 
Auswertung des Bildes hat es sich als vorteilhaft ermGS&n^ 
wenn hach Erzeugung des Gesamtbildes, gegebenenfalls 
des dreidimensionalen Bildes eine Bildnachverarbeitung €fr- 
folgt, im Rahmen welcher beispielsweise eine besondere 
Fafbgebung einzelner relevanter Bildbereiche moglich ist, 
eine Mustererkennung, eine Segmentieruhg, eine Filterung 
oder dergleichen. Der Bildnachverarbeitung sind insoweit 
keine Grenzen gesetzt Vielmehr konnen alle im Rahmen. 
der digitalen Bildveraibeitung bekannten Bildverarbei- 
tungsprozeduren.zum Einsatz kommen. Als besbnders vor- 
teilhaft ist.es hierbei, wenn die Bildnachverarbeitung erfin- 
dungsgemaB online erfoigt, so daB das erzeugte Gesamtbild, 
gegebenenfalls das dreidimensionale Bild bereits .als nach- 
verarbeitetes Bild ausgegeben wird. 

Als besonders zweckmaBig hat es sich erwiesen, wenn im 
Rahmen der Bildnachverarbeitung und/oder der Bilddarstei- 
lung eine Darstellung als \^ual-Reality-Bild erfoigt. Die 
erfindungsgemaBe Innenwand-Rekonstniktion in Form ei- 
. nes dreidimensionalen Bildes ermoglicht mit be^onderem 
Vorteil diese Virtu al-Reality-Darstellung, im Rahmen wel- 
cher der Hohlkorper an dem Anzeigemittel wie beispiels- 
weise dem Monitor so dargestellt werden kann, als befande 
sich der Betrachter im Inneren des Hohlkorpers. Ausgehend 
von seiner Position kann er.sich dann, wie bei Virtual-Rea- 
lity-Darstellungeh iiblich, im Hohlkorper, als beispielsweise 
dem Organ Oder dem GefaB init Hilfe eines entspr^henden 
Steuerungs- oder Bewegungsmittels (beispielsweise Helm, 
Handschuh oder dgl.) in alle Raumrichtungen bewegen iind 
seine Blickrichtung verandem. Die Darstellungsbereiche 
und GroBe der Innenwand des endoskopisch untersuchten 
Hohlkorpers andem sich dann mit .Anderung der Position 
und/oder Blickrichtung des Betrachters, so daB eine Beurtei- 
lung samtlicher Ihnenwandbereiche moglich ist. 

SchUeBlich kann .gemaB einer zweckmaBigen Weiterbil- 


dung des Erfindungsgedankens vpigeseheh sein, daB zu je- 
dem Einzelbild eine Information bezuglich des Aufhahme- 
zeitpunktes ermitteit wird, so daB im Rahmen einer Offline- 
Bilderzeugung oder einer spateren Ausgabe, beiispielsweise 
5 nachdem die Bilddaten in der Bildverarbeitungseinrichtung 
abgespeichert wurden, welche vorher online verarbeitet und 
ausgegeben wurden, eine Darstellung der zeidichen Bewe- 
gimg des Hohlkorpers moglich ist. Dies ermoglicht bei- 
spielsweise die nachtragliche Betrachtung der Magen- Oder 
10 Darmtatigkeit iiber den Zeitraum der Endoskopuntersu- 
chung. 

Neben dem erfindungsgemaJBen Verfahren betrifft die Er- 
findung f erner ein S ystem zur Durchf Cihrung des Verf ahrens, 
umfassend ein Endoskop und eine Einrichtung zur Ausgabe 

15 der mit dem Endoskop aufgenommenen Bilder bzw. Bildda- 
ten in Form von Videosignalen. Das System zeichnet sich 
ei*findungsgemaB dadurch aus, daB Mittel zum Digitalisie- 
ren der Vid^bildsignale yorgeseheri sind, und daB eine 
Bildverarbeitungseinrichtung vorgesehen ist, mittels wel- 

20 cher durch Oberlagerung und/oder Zusanomensetzen der di- 
gitalisierten Videobildsignale mehrerer Einzelbilder unter- 
schiedliche Bereiche der Innenwand des zu untersuchehden 
Hohlkorpers ein Gesamtbild erzeugbar ist, welches naturge- 
maB an einer entsprechendea Anzeigeeinrichtung ausgebbar 

25 ist ' 

Neben weiterer erfindungsgemaBer Merkmale, wie sie in 
den Unteranspriichen ahgegeben sind, umfaBt das System 
femer ein Positions- und/oder Orientierungserfassungssy- 
stem zur Ermittlung der Positions- und/oder Orientierungs- 

30 daten, umfassend ein oder mehrere am, im oder im Bereich 
des Hohlkorpers anbringbare Sensorelemente, das oder die 
. mit einem oder mehreren extemen Sensorelementen zusam- 
menwiricenJ Bei diesra Sensorelementen kann es sich vor- 
teilhaft um entsprechende SpUlen handeln, die Magnetfelder 

35 erzeugen, welche mittels des oder dier anderen Sensorele- 
mente gemessen werden konnen. Die am, im oder im Be- 
reich des Hohlkorpers anbringbaren Sensorelemente konnen 
erfindungsgemaB am Endoskop fest angeordnet sein, oder. 
separat von diesem plazierbar, beispielsweise im Magen 

40 selbst ablegbar sein. ^Jedwede Anwendimg ist hier denkbai; 
solange sie zu einer korrekten, koordinatengebundenen Er-^ 
mitdimg der relevanten Daten fuhrt So hat es sich als beson-^ 

. ders zweckmiSBig erwiesen, wenn das Positions- mid/oder 
Orientierungseffassungssystem zu Erzeugung digitalisierter 

45 Positions- und/oder Orientierungsdateh ausgebildet ist, wo- 
bei zweckmaBigerweise zu jedem Einzelbild entsprechende 
Daten erfaBt werden. Die Erzeugung in digitaler Form ist 
insbesondere im Hinblick auf die Zuordnung der ohnehin in 
digitalisierter Form gelieferten Videobildsignale von Vor- 

50 teil. 

Weitere Vorteile, Merkmale und Einzelheiten der Erfinr 
dung ergeben sich aus den im folgenden beschriebenen Aus- 
fuhrungsbeispielen sowie anhand der.Zeichhungen. Dabei 

zeigen: 

55 Fig* 1 eine Prinzipskizze zur Darstellung des erfindungs- 
gemaBen Systems einer ersten Ausfiihfungsform, 

Fig. 2 eine Prinzipskizze zur Darstellung der Gesaintbild- 
erzeugung durch korrelationsbedingt&Uberlag^iuig, und 
FJg. 3 eine Prinzipskizze zur Darstellung des erifindungs- 
60 gemaBen Systems gemaB einer zweiten Ausfuhrungsform. 
Fig. 1 zeigt eine Prinzipskizze des erfindungsgemaBen . 
Systems, wobei hier als Hohlkorper 1 der Magen untersucht 
wird. Uber die Speiserohre 2 ist der Glasfiberschlauch des 
!&idosk6ps 3 in den Magen eingefiihrt. Das Endoskop ist nur. 
65 prinzipiell dargestellt, sein Aufbau ist bekannt. Dem Endo- 
skop 3 ist eine Kamera 4 zugeordnet, welche die Bilder, die 
mittels des EndoSkops betrachtbar sind, in Forin von Video- 
bildsignalen in digitalisierter Form aufbereitet und an eine 
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Bildverarbeitungseinrichtung 5 Uefert. Das System umfaBt fakte ausgebildet. Diese konnen optischer Natur sein, be- 
femer ein Positions- und/oder Orientierungssystem 6. Die- dingt durch die konkrete Ausbildung der Endoskopoptik. 
ses weisteinSensorelement 7 auf, welches an dfer Spitzedes Diese optischen Artefakte konnen in dem sogenannten 
Endoskops angeordnet ist und uber eine Leitung 8 mit dem , "Froschaugen-Effekt", etwaigen Verzerrungen, VergroBe- 
System 6 kommuniziert. Das Sensorelement 7, welches 5 rungen oder Verkleinerungen oder dgl. liegen und konnen 
auoh als kombiniertes, mehrere Elemente umfassendes Sen- vor dem Uberlagem/Zusammensetzen der Einzelbilder fiir 
sprelement ausgebildet sein kann, ist mitsamt dem Endo- jedes Einzelbild kbrrigiert werden. Daneben ist die Bildver- 
skop 3 beweglich. Das System 6 umfaBt femer ein oder arbeitungseinrichtung 5 auch zur Korrektur etwaiger aus ei- 
mehrere exteme, freistehende Sensorelemente 9, welehe als ner Bewegung des Hohlkorpers, beispielsweise des Magens, 
Bezugsbasis fur die Positionsdatenermittlung und mit dem 10 resultierender Bildartefaktebasierend auf den erfaBten Posi- 
System 6 iiber eine Leitung 10 in Verbindung stehen. Bei tions- und/oder Orientierungsdaten ausgebildet. Diese Posi-. 
den Sensorelementen 7, 9 kann es sich um Sende- und Emp- tions- und/oder OrientierungsdatMi ermogUchen wie be- 
fangsspulen handehi, d. h., es erfolgt eine Datenerfassung schrieben die Ermittlung der konkreten Lagebeziehung des 
basiearend auf den jeweils erzeiigten Maghetfeldem. Die Po- aufgenommenen Bildes in einem Koordinatensystem, wel- 
sitionS'- und/oder Orientiaijngsdateii werd«i zu jedem Ein- 15 ches von den Sensorelementen aufgespannt wird. 
zelbild, welches mittels der Kamera 4 aufiiehmbar ist, erfaBt Die Bildverarbeitungseinrichtung 5 kann im einfachsten 

und an die Bildverarbeitungseinrichtung 5 gegeben, wobei Fall zur Erzeugung eines Gesamtbildes ausgebildet sein, 
diese Daten bevorzugt bereits in digitalisierter Form erzeugt welche insoweit zweidimensional ist, jedoch den gesamten, 
und weitergegeben werden. In der Bildverarbeitungseinrich- mittels des Endoskops beobachteten Bereich darstellt. Die 
tung 5 werden die erfaBten Positions- und/oder Orientie- 20 Bilderzeugung kann online oder offline erfblgen. Altemativ 
rungsdaten den einzehien Bildem zugeordnet. An der Ka- hierzu kann die BDdveratbeitungsrinrichtung 5 auch zur Er- 
mera 4 1st, gestrichelt dargestellt, ein Ausgang 13 an einen zeugung eines dreidimensionalen Bildes ausgebildet sein, 
Videorecorder vorgesehen. welches ebenfalls auf der Anzeigeeinrichtung 11 wie bei- 

Die eigentliche Gesamtbilderzeugung arfolgt mittels der spielsweise einem Femseher oder einem Monitor angezeigt 
Bildverarbeitungseinrichtung 5. Diirch Bewegen des Endo- 25 werden kann. Daneben kann die Bildverari>eitungseinrich- 
skops 3 werden eine Vielzahl von Einzelbildem von unter- tung 5 auch zur Ausgabe des dreidimensionalen Bildes als 
schiedlich^ Bereichen des ^ohlkorpers 1 aufgenonmien Vutual-Reality-Bild ausgebildet sein, welches mittels einer 
und m digitalisierter Form der Bildverarbeitungseinrichtung nichtgezeigten Steuerungs- und/oder Bewegungseinrich- 
5 zugefiihrt. In der Bildverarbeitungseinrichtung 5, die eine ' tung entsprechend bewegbar ist. SchlieBlich ist sie fiir eine 
entsprechendeRechnereinrichtungaufweist,sindzumeineii 30 etwaige Bildnachverarbeitungsprozedur ausgebild^ Zur 
Korrelationsalgorithmen niedergelegt, mittels welcher die Darstellung etwaiger Bewegungen des Hohlkorpers kann 
gelieferteri Einzelbilder miteinander korreliert werden, um die Bildverarbeitungsdririchtung zur Zuordnung des Auf- 
sehr ahnliche oder annahemd identische Bereiche zwischen nahmezeitpunktes zu jedem Einzelbild und einer entspre- 
den Einzelbildem zu ermitteln, so daB diese entisprechend chenden zeitbezogenen Darstellung ausgebildet sein. 
iiberlagert oder zusammengesetzt werden konnen. Den grob 35 Fig, 3 zeigt ein weiteres erfindungsgemaBes System, wel- 
schematischen Ablauf zeigt Fig, 2. Links sind zwei Einzel- ches insoweit dem in Fig. 1 gezeigten System entspricht Je- 
bilder Bi und B2 gezeigt, wobei das Bild Bi ein zeitlich fru- doch sind hier Sensorelemente 12 verwendet, die im Inneren 
her aufgenommenes Bild ist, das einen lokal etwas anders des Hohlkorpers, hier im Magen, ablegbar sind und mit dem 
gelegenen Bereich der Hohlkorperinnenwand zeigt als das in Fig. 1 bekannten Sensorelement 9 zusammtaiwirken. 
Bild B2. Gezeigt sind femer zwei schematisierte Koirelati- 40 Auch mit diesem System ist eine hinreich^dp Positibnser- 
onsbereiche Ki und K2 innerhalb der jeweiligen Bilder. Die fassung maglich, da zwar die Sensbrelemente 12 bei einer 
Bilder Bi und B2 sind bedingt durch den kteisf&rmigen Bewegung des Magens ebenfalls bewegt werden, jedoch im 
Querschnitt des Endoskops kreismnd. In der Bildvararbei- Zusammenwirken mit dem Sensorelement 9 die Magenbe- 
tungseinrichtung 5 kdnnen nun diese beiden Korrelationsbe- wegung selbst ermittelbar ist und bezogen auf die festste- 
reiche Ki und K2 diireh Korrelation ihrer Informationsin- 45 hende Spitze des Endoskops, die bei einer Bewegung des 
halte, also der Signalinformation als einander sehr ahnlich Magens nicht bewegt wird, eine Ermittlung der entspre- 
beurteilt werden. Dieses Korrelationsergebnis ermoglicht chenden Positions- und/oder Orientierungsdaten mdglich 
es, die beiden Bilder Bi und Bi zum in Fifr 2 rechtsgezeifi- ist 

Patentanspriiche 

1 . Verfahren zur Erzeugung von BilddarsteUungen der 
Oberflache der Innenwand von Hohlkorpem im Rah- 
men einer endoskopischen Untersuchung, insbeson- 
dere von Hohlraumorganen und GefaBen, wobei die 
mittels des Endoskops gelieferten Bilddaten in Form 
von Videobildsignalen ausgegeben werden; dadurch 
gekennzelchiiet, daB mehrere Einzelbilder unter- 
schiedUcher Bereiche der Innenwand des zu untersii- 
chendeh Hohlkorpers aufgenommen werden, deren Vi- 
deobildsignale digitalisiert werden, Und daB basierend 
auf den digitalisierten Videobildsignalen in einer Bild- . 
verarbeitungseinrichtung durch Uberlagerung und/ 
Oder Zusammensetzen einzelner Einzelbilder ein Ge- 
samtbild erzeugt wird. 

2. Verfahren nach Anspnich 1, dadurch gekennzeich- 
net, daB die Einzelbilder bzw. die Bildsignale durch 
Korrelation mittels Korrelationsalgorithmen und/oder 


ten Gesamtbild Bges zusainmenzusetzen, wobei der in Fig. 2 
gezeigte Korrelationsbereich Kg^^ den beiden uberlagerten 50 
Korrelationsbereichen Ki und K2 entspricht. Je mehr solcher 
BUder miteinander kotreliert und aneinander gehangt wer- 
den, desto weidaufiger kann das unt^suchte Organ oder Ge^ 
faB dargestellt werden, Samtliche .Korrelations-, Uberlage- 
rungs- uiid Zusammensetzungsschritte werden von der Bild- 55 
verarbeitungseinrichtuiig durchgefiihrt. 

Die UberlagerungyZusammensetzung wird im Verhaltnis 
zur ausschlieBlichen Korrelation einfacher, wenn die Positi- 
ons' und/oder Orientierungsdaten des jeweiligen Einzelbil- 
des bekaimt sind. Iii Fig. 2 sind diese lokaien Daten mit Pi 60 
und Tz gekennzeichnet. Diese Daten k6nnen mittels des Sy- 
stems 6.ermittelt werden, Hierauf basierend kann eine Nor- 
mierung der Einzelbilder vorgenommen werden, d. h. ihre 
absolute Lagebezuglich einander kann bestimmt werden, so 
daB im Rahmen der Rekonstmktibn jedes Bild an den richti- 65 
gen Ort eingesetzt werden kann. 

Neben der reinen Bilderzeugung ist die Bildverarbei- 
tungseinrichtung 5 auch zur Korrektur etwaiger Bildarte- 
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aufgrund wahrend der Einzelbildau&iahine erfaBter 
raumlicher; Positions- und/oder Oriehtierungsdaten 
mitdnander verkniipft werden. 

3. Verfahren nach Anspruch 2, dadurch gekennzeich- 
net, daB basierend auf den erfaBten Positions- und/oder 5 
Orienjdeningsdaten durch tjberlagem und/oder Zusam- . 
mensetzen ein dreidimensionales Bild erzeugt wird. 

4. Verfahren nach einein der vorangehenden Ansprii- 
che, dadurch gekennzeichnet, dafi zu jedem Einzelbild 
spezifische Positions- und/oder Orientierungsdaten lO 
aufgenommen und diesem zugeordnet werden. 

5. Verfahren nach einem der Anspriiche 2 bis 4, da- 
durch gekennzeichnet, daB im Rahmen der Korrelation 
optische und/oder durch eine Bewegung des Hohlkor- 
pers hervorgerufene Bildartefakte wie Verzerrungen 15 
Oder dergleichen beriicksichtigt werden. . r 

6. Verfahren nach. einem der vorangehenden Ansprti- 
che, dadurch gekennzeichnet, daB vor dem Oberlagem 
und/oder Zusammensetzen der Einzelbilder bzw. der 
Bildsignale Bilddatenkonrekturen vorgenommen wer- 20 
den. ' . 

7. Verfahren nach Anspruch 6, dadurch gekennzeich- 
net, daB von einer Bewegung des Hohlkorpers wahrend 
der EinzelbildauQiahme hervorgerufene Einzelbildar- 
tefakte anhand der Positions^ uiid/oder Orientierungs- 25 
daten koirigiert werdeh. 

.8. Verfahren nach einem der vorangehenden Ansprii- 
che, dadiirch gekennzeichnet, daB die Bilderzeugung 
online wahrend der Einzelbildaufnahme oder offline 
nach der Aufeahme der Einzelbilder erfolgt. 30 
9. Verfahrien nach einem der vorangehenden Ansprii- 
che, dadurch gekennzeichnet, daB nach Erzeugung des 
Gesamtbildes, gegebenenfalls des dreidimensionalen 
Bildes eine Bildnachverarbeitung erfolgt 
' 10. Verfahren nach Anspruch 9, dadurch gekennzeich- 35 
net, da3 die Bildnachverarbeitung online erfolgt, so 
daB das erzeugte Gesamtbild, geg;ebenenfalls das drei- 
dimensionale Bild bereitis als nachverarbeitetes Bild 
ausgegeben wird. 

11. Verfahren nach Anspruch 9 oder 10, dadurch ge- 40 
kennzeichnet, daB im Rahmen der Bildnachverarbei- 
tung und/oder Bilddarstellung eine Darstellung als W- 
tual-Reality-Bild erfolgt. 

12. V^ahren nach einem der vorangehenden AhsprO- 
che, dadurch gekennzeichnet, daB zu jedem Einzelbild 45 
eine Information beziiglich des Aufnahmezeitpunktes 
ermittelt wird, so daB im Rahmen einer Offline-Bilder- 
zeugung Oder einer spateren Bildausgabe eine Darstel- 
lung der zeitlichen Bewegimg des Hohlkorpers mog- 
lich ist; 50 

13. System zur DurchfUhrung des Verfahrens nach ei- 
nem der vorangehenden Anspriiche^ umfassend ein En- 
doskop und eine Einrichtung zur Ausgabe der mit dem 
Endoskop aiifgenommenen Bilder bzw. Bilddaten in . 
Form von Videobildsignalen, dadurch gekennzeichnet, 55 
daB Mittel (4) zuin Digitalisieren der Videobildsignale 
vorgesehen sind, und daB eine Bildverarbeitungsein- 
richtung (5) vorgesehen ist, mittels welcher durch 
Oberlageruiig imd/oder Ziisammensetzeri der digitali- 
sierten Videobildsignale mehrerer Einzelbilder (B i, B2) 60 
unterschiedlicher Bereiche der Innenwand des* zu un- 
tersuchenden Hohlkorpers (1) ein .Gesamtbild (Bgea) er- 
zeugbar ist. 

14. System nach Anspruch 13, dadurch gekeiinzeich- 
net, daB die BildverarbeitungseinricHtung (5) zum Ver- 65 
kniipfen der Einzelbilder bzw. der Bildsignale mitein- 
ander durch Korrelation mittels Korrelationsalgorith- 
men und/oder aufgrund wahrend der Hnzelbildauf- 


nahme erfaBter raumlicher Positions- und/oder. Orien- 
tierungsdaten ausgebildet ist. 

15. System nach Anspruch 14, dadurch gekennzeich- 
net, daB die Bild verarbeitungseihrichtung (5) zur Err 
zeugung eines dreidimensionalen Bildes durch Oberla- 
gem und/oder Zusaromensetzen der Einzelbilder bzw. 
der Bildsignale basierend auf den erfaBten Positions- 
und/oder Orientierungsdaten ausgebildet ist. 

16. System nach einein der Anspriiche 13 bisi .15, da- 
durch gekennzeichnet, daB die Bildyerarbeitungsein- 
richtung (5) zur Berucksichtigimg optischer und/oder 
aufgrund einer Bewegung des Hohlkorpers (1) beding- 
ter Bildartefakte wie Verzerrungen oder dergleichen im 
Rahmen der Korrelation ausgebildet ist. 

17. System nach einem der Anspriiche 14 bis 16, da- 
durch gekeimzeichnet, daB ein Positions- und/oder Ori- 
entierungserfassimgssystem (6) ziir Ermittlung er Posi- 
tions- und/oder Orientierungsdaten vorgesehen ist, um- 
fassend ein oder mehrere am, im oder im Bereich des 
Hohlkorpers (1) anbringbare Sensorelemente (7, 12), 
das Oder die mit einem oder mehreren extemen Sensor- 
elementen (9) snisammenwirken. 

18. System nach Anspruch 17, dadurch gekennzeich- 
liet, daB das oder die Sensorelemente (12) am Endo- 
skop (3) angeordnet sind, oder separat von dies'em pla- 
zierbar sind. , 

19. System nach Anspruch 17 oder 18, dadurch ge- 
kennzeichnet, daB das Positions- und/oder Orientie- 
rungserfassungssystem (6) zur Erzeugung digitalisier- 
ter Positions- uncl/oder Oii^timuigsdaten ausgebildet 
ist. 

20. System nach einem der Ansjiruche \1 bis 19, da- 
durch gekennzeichnet, daB das Positions- uiid/oder 
Orientierungserfassungssystem (6) zur Erfassung der 
Positioiis- und/oder Orientierungsdaten zu jedem Ein- 
zelbild ausgebildet ist. 

21. System nach einem der Anspriiche I4 bis 20, da- 
durch gekennzeichnet, daB die Bildverarbeitungsein- 
richtung (5) zur Korrektur von aus einer Bewegung des = 
Hohlkorpers (1) wahrend. der .EinzelbUdaufiiahme re- 
sultierender Einzeibildartefakte anhiand der Positions- 
und/oder Orientierungsdaten ausgebildet ist. 

22. System nach einem der Anspriiche 13 bis 21, da- 
durch gekeiinzeichiiet, dafi Mittel zur Erzeugung und 
Zubrdnung einer Information beziiglich des Aiifiiah- 
mezeitpunktes eines Einzelbildes vorgesehen sind, imd 
daB die Bildverarbeitungseinrichtung (5) im Rahmen 
einer Offline-Bilderzeuguiig oder einer spateren Bild- 
ausgabe zur Erzeugung einer die zeitliche Bewegvmg 
des Hohlkorpers (1) darstellenden Bildwiedergabe ba- 
sierend auf der Zeitinformation ausgebildet ist: 

23. System iiach einem der Anspriiche 13 bis 22, da- 
durch gekennzeichnet, daB die Bildverarbeitungsein- 
richtung (5) zur Erzeugung des Gesamtbildes, gegebe- 
nenfalls des dreidimensionalen Bildes im OnHne-Be- 
trieb wahrend der .Einze;lbildaufiiahme und/oder im Of- 
fline-Betrieb. nach Aufnahme der Einzelbilder ausge- 
bildet ist. f 

24. Systiem nach einem der Anspiiiche 13 bis 23, da- 
durch gekennzeichnet, daB die Bildverarbeitungsein- 
richtung (5) zur Bildnachverarbeitung des erzeugten 
Gesarntbildes, gegebenenfalls des dreidimensionalen 
Bildes ausgebildet ist. 

25. System nach Anspruch 24, dadurch gekennzeich- 
net, daB die BildVerarbeitungseinrichturig (5) zur On- 
line-Bildnachverarbeitung ausgebildet ist. 

26. System nach einem der Anspriiche 15 bis 25, da- 
durch gekennzeichnet, daB die Bildverarbeitungsein- 


DE 198 00 765 A. 1 - 

10 


V 


richtung (5) zur Darstellung des erzeugten dreidimen- 
sionaien Bildes al$ Virtual-Reality-Bild ausgebildet ist, 
und daB das System eine Steuerungs- oder Bewegungs- 
einrichtung fur das dreidimensionale Bild umfaBt. 
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